BUNDESREPUBLIK DEUTSCHLAND 




Prioritatsbescheinigung uber die Einreichung 
einer Patentanmeldung 



Aktenzeichen: 
Anmeldetag: 
Anmelder/lnhaber: 
Bezeichnung: 



102 43 162.0 



17. September 2002 



Siemens Aktiengesellschaft, Munchen/DE 



Rechnergestutztes Darstellungsverfahren fur ein 
3D-Objekt 



IPC: 



G 06 T 15/00 



Die angehefteten Stiicke sind eine richtige und genaue Wiedergabe der urspriing- 
lichen Unterlagen dieser Patentanmeldung. 



Munchen, den 28. Mai 2003 
Deutsches Patent- und Markenamt 
Der Prasident 

In Auftrag 



A 9161 

02m 

EDV-L 



200210466 



Beschreibung 

Rechnergestiitztes Darstellungsverf ahren fiir ein 3D-0bjekt 

5 Die vorliegende Erfindung betrifft ein rechnergestiitztes Dar- 
stellungsverf ahren fur ein 3D-0bjekt. Derartige Verf ahren 
werden unter anderem bei bildgestutzten medizinischen Ein- 
griffen angewendet. 

10 Bei diesen Verfahren wird vom Rechner kontinuierlich eine 2D- 
^ Grundabbildung des Objekts ermittelt und iiber ein Ausgabesys- 
fm^' tern als Bild fliichtig ausgegeben. Der Einsatz derartiger Dar- 
stellungsverf ahren bietet sich dabei insbesondere deshalb an, 
weil die hierzu benotigte Ausstattung im Operationssaal oft 
15 vorhanden ist. Daruber hinaus ist diese Ausstattung einfacher 
handhabbar und kostenguns tiger in der Anschaffung als eine 
Ausstattung fiir eine 3D-Bildgebung wie beispielsweise einen 
Magnetresonanztomographen, einen Computertomographen, 3D-An- 
giographiegerate und dergleichen. Daruber hinaus ist die Er- 
20 mittlung eines Volumendatensatzes , der ein Objekt beschreibt, 
mit dem heutigen Stand der Technik in Echtzeit nicht moglich. 
Die Echtzeitf ahigkeit der Bildgebung ist aber gerade in Zu- 
sammenhang mit Eingriffen in den Korper eine unverzichtbare 
Eigenschaf t • 

2D-Abbildungen des Objekts weisen eine Anzahl von Nachteilen 
auf . So steht insbesondere ein Bediener (der Operateur) beim 
Einsatz von 2D-Abbildungen des Objekts immer vor der schwie- 
rigen Aufgabe, den dargestellten 2D-Bildinhalt mental auf die 
30 realen drei dimensional en anatomischen Verhaltnisse zu iiber- 
tragen. Oft stellt sich dem Bediener auch die Situation dar, 
dass eine praoperative Eingrif f planung anhand eines Volumen- 
datensatzes und aus dem Volumendatensatz ermittelten 2D-Dar- 
stellungen erfolgte, diese Planungsergebnisse bei der Opera- 
3 5 tion aber nicht direkt auf in Echtzeit verfiigbaren 2D-Abbil- 
dungen wahrend der Operation abbildbar sind. 
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Bei Navigationsprozeduren werden im klinischen Umfeld meist 
mit Positionssensoren bestiickte chirurgische Instrumente be- 
nutzt. Dadurch kann die aktuelle Position dieser Instrumente 
- gegebenenf alls nach einer einmalig oder mehrmals wahrend 
des Eingriffs durchgef iihrten sogenannten Registrierungsproze- 
dur - wahrend des Eingriffs in praoperativ erzeugten Bildda- 
ten dargestellt werden. Bei dieser Vorgehensweise ist die 
nicht einfache Handhabung der Positionssensoren problema- 
tisch. Auch die Registrierungsprozedur ist meist sehr aufwan- 
dig. Ein weiterer Nachteil besteht darin, dass die praopera- 
tiven, aus einem Volumendatensatz des Objekts ermittelten 
Bilddaten oft nicht die erf orderliche Aktualitat aufweisen. 

Bei orthopadischen Prozeduren ist ferner bekannt, mehrere 2D- 
Abbildungen des Objekts (meist in Form von Pro j ektionen) dar- 
zustellen und so eine Navigation zu betreiben. Dieser Ansatz 
behebt den Nachteil der mangelnden Aktualitat der praoperati- 
ven 3D-Volumendaten, da diese Daten hier durch Rontgenbilder 
ersetzt werden. Allerdings steht hier keine echte 3D-Infor- 
mation zur Verftigung, sondern nur eine quasi-3D-Inf ormation, 
aus der der Operateur mental ein 3D-Szenario erzeugen muss. 
Dariiber hinaus konnen auch bei dieser Vorgehensweise Ergeb- 
nisse einer vorherigen Eingrif f splanung, die vorab anhand 
praoperativer (echter) 3D-Bilddaten durchgef iihrt wurde, nicht 
ohne wei teres auf die intraoperativen 2D-Proj ektionen iiber- 
tragen werden. 

Schliefilich ist noch bekannt, zwei Pro j ektionen des Operati- 
onsfelds aufzunehmen und iiber das Ausgabesystem als Bilder 
darzustellen . Die Pro j ektionen werden dabei unter verschiede- 
nen Winkeln aufgenommen, um quasi-raiimliche Information iiber 
das Operationsf eld zu gewinnen. Auch bei diesem Ansatz wird 
keine echte 3D-Bildinf ormation generiert, so dass wieder\im 
der 3D-Kontext vom Operateur mental geschaffen werden muss. 

In der Slteren, nicht vorverof f entlichen deutschen Patentan- 
meldung 102 10 646.0 mit dem Titel „Verfahren zur Bilddar- 
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stellung eines in einen Untersuchungsbereich eines Patienten 
eingebrachten medizinischen Instruments'', eingereicht am 
11.03.2002, ist ein rechnergestiitztes Darstellungsverf ahren 
fur ein 3D-0bjekt beschrieben, bei dem von einem Rechner eine 
5 2D-Grunddarstellung eines 3D-Volumendatensatzes des Objekts 
ermittelt und iiber ein Ausgabesystem als Bild fluchtig ausge- 
geben wird. Vom Rechner wird ferner eine 2D-Grundabbildung 
des Objekts ermittelt und - zumindest teilweise - der Grund- 
darstellung iiberlagert bzw. in diese eingeblendet . Diese Vor- 
10 gehensweise stellt bereits einen groSen Fortschritt dar, ist 
aber immer noch nicht in alien Aspekten vollig bef riedigend. 

Die Aufgabe der vorliegenden Erfindung besteht darin, ein 
rechnergestiitztes Darstellungsverf ahren fiir ein 3D-Objekt zu 
15 schaffen, mittels dessen fiir einen Bediener (einen Operateur) 
eine noch einfachere Erfassung der dargestellten Sachverhalte 
moglich ist. 

Die Aufgabe wird dadurch gelost, dass vom Rechner eine 2D- 
2 0 Grundabbildung des Objekts ermittelt und iiber ein Ausgabesys- 
tem als Bild fliichtig ausgegeben wird, dass von einem Rechner 
eine 2D-Grunddarstellung eines 3D-Volumendatensatzes des Ob- 
jekts ermittelt und iiber das Ausgabesystem als Bild fliichtig 
ausgegeben wird und dass die Grundabbildung und die Grunddar- 
stellung vom Rechner gleichzeitig, aber ortlich getrennt von- 
einander ausgegeben werden. 

Die vorliegende Erfindung zielt also insbesondere auf intra- 
operative Situationen ab, bei denen einerseits intraoperati- 
30 ve, in Echtzeit ermittelte 2D-Bilddaten verwendet werden, a- 
ber zusatzlich preoperative 3D-Bilddaten existieren, so dass 
sich die Inf ormationen der 2D-Bilddaten und die Inf ormationen 
der 3D-Bilddaten gegenseitig erganzen konnen. Die Erfindung 
beschrankt sich aber nicht auf ein einhei tliches Darstellen 
35 ineinander (Einblenden) , sondern betrif ft ein Darstellen der 
Bi Ider nebeneinander . 
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Wenn nicht nur die Grundabbildung, sondern auch die Grunddar 
stellung vom Rechner in Echtzeit ermittelt wird, ist das Ver 
fahren besonders vielseitig anwendbar. Insbesondere besteht 
in diesem Fall die Moglichkeit, die Grunddarstellung interak 
tiv zu andern. 

Wenn die Grundabbildung durch eine Grundaufnahmegeometrie be 
stimmt ist und die Grundaufnahmegeometrie jederzeit anderbar 
ist, ist auch die Grundabbildung jederzeit etwaigen geander- 
ten Erf ordernissen anpassbar. 

Wenn zum Anpassen der Grundabbildung die Grundauf nahmegeomet 
rie von einem Bediener manuell in eine Grundauf nahmestellung 
verfahren werden soil, kann dies besonders genau und zuver- 
lassig geschehen, wenn bei Erreichen der Grundauf nahmestel- 
lung der Rechner eine akustische oder optische Grundriickmel- 
dung an den Bediener ausgibt und /oder die Grundaufnahmegeo- 
metrie eine mechanische Grundriickmeldung an den Bediener aus 
gibt . 

Wenn die Grunddarstellung und die Grundabbildung perspektivi 
sche Projektionen sind und derart bestimmt werden, dass ihre 
Projektionsparameter libereinstimmen, zeigen beide Bilder das 
Objekt unter dem gleichen Blickwinkel. Im Idealfall stimmen 
die Bilder sogar iiberein. Der mentale Abgleich der beiden 
Bilder miteinander ist dadurch fur den Bediener besonders 
einf ach. 

Ein Bestimmen der Projektionsparameter der Grunddarstellung 
derart, dass die Projektionsparameter mit den Projektionspa- 
rametern der Grundabbildung libereinstimmen, ist im Stand der 
Technik unter dem Begriff „Registrierung'' bekannt . Registrie 
rungsver fahren sind beispielsweise in der eingangs erwahnten 
DE 102 10 646.0 beschrieben. Sie sind als solche nicht Ge- 
genstand der vorliegenden Erfindung. 
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Wenn mindestens eine vom Rechner in Bezug auf den Volumenda- 
tensatz gegebenen ortsbezogene Information vom Rechner an 
einer korrespondierenden Stelle der Grundabbildung beriick- 
sichtigt wird, ist das Verstandnis des dargestellten Sachver- 
halts fur den Bediener noch einfacher. 

Der Volvimendatensatz ist in aller Regel vorab ermittelt wor- 
den. Er kann beispielsweise einen Gefafibaiim reprasentieren, 
innerhalb dessen ein Katheter gefuhrt werden soli. Anhand des 
Volumendatensatzes kann beispielsweise ein Weg festgelegt 
worden sein, entlang dessen der Katheter zu fiihren ist. In 
einem derartigen Fall ist z. B. ein Einblenden einer soge- 
nannten «road map^' in die Grundabbildung moglich. Auch ist es 
moglich, mittels eines Cursors in der Grunddarstellung Berei- 
che zu markieren oder zu selektieren und derartige Markierun- 
gen bzw. Selektionen halb- oder vollautomatisch in die Grund- 
abbildung zu ubertragen. Gegebenenf alls ist es sogar moglich, 
einen Cursor fiir die Grunddarstellung mit einem Cursor fur 
die Grundabbildung direkt zu koppeln. 

Auch die umgekehrte Vorgehensweise ist prinzipiell moglich. 
Es ist also auch moglich, mindestens eine vom Rechner in Be- 
zug auf das Objekt gegebene ortsbezogene Information vom 
Rechner an einer korrespondierenden Stelle der Grunddarstel- 
lung zu berticksichtigen. Beispielsweise kann der tatsachliche 
momentane Ort einer Katheterspitze ermittelt und in der 
Grunddarstellung angezeigt werden. 

Bei der Berucksichtigung von in Bezug auf das Objekt gegebe- 
nen ortsbezogenen Inf ormationen an korrespondierenden Stellen 
der Grunddarstellung ist aber zusatzlich zu beriicksichtigen, 
dass - im Gegensatz zur Abbildung vom Dreidimensionalen ins 
Zweidimensionale - die Abbildung von der Grundabbildung in 
die Grunddarstellung in der Regel nicht eindeutig ist. Jeder 
Punkt der Grundabbildung wird vielmehr in eine Linie im Volu- 
mendatensatz abgebildet. Diese Linie reduziert sich nur dann 
wieder auf einen Punkt der Grunddarstellung, wenn die Grund- 
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darstellung und die Grundabbildung perspektivische Projektio- 
nen sind, deren Projektionsparameter iibereinstimmen. 

Insbesondere aufgrund dieser Unbestimmtheit der Abbildung der 
5 Grundabbildung in den Volumendatensatz ist es von Vorteil, 

wenn vom Rechner auch eine von der Grundabbildung des Objekts 
verschiedene 2D-Zusatzabbildung des Objekts ermittelt wird, 
die Zusatzabbildung vom Rechner liber das Ausgabemedium als 
Bild fliichtig ausgegeben wird und die Zusatzabbildung des Ob- 
10 jekts gleichzeitig zur Grundabbildung und der Grunddarstel- 
lung, aber ortlich getrennt von diesen ausgegeben wird. Die 
Ermittlung der Zusatzabbildung erfolgt dabei selbstverstand- 
lich in Echtzeit. 

15 Denn dadurch, dass dann zwei 2D-Abbildungen zur Verfugung 

stehen, konnen bei Markierung je einer bestimmten Stelle in 
den beiden Abbildungen im Volumendatensatz zwei Linien ermit- 
telt werden. Ahnlich einer Kreuzpeilung kann somit ein kor- 
respondierender Ort im Volumendatensatz ermittelt werden und 

20 auch in der Grunddarstellung dann eindeutig (punktuell) mar- 
kiert werden . 

Analog zur Grundabbildung ist auch die Zusatzabbildung durch 
^ eine Zusatzaufnahmegeometrie bestimmt. Vorzugsweise ist auch 
Hj^f die Zusatzaufnahmegeometrie jederzeit anderbar. In analoger 

Weise zur Grundabbildung kann dabei wieder ein manuelles Ver- 
fahren in eine vorbestimmte Zusatzauf nahmestellung durch eine 
akustische oder optische Zusatzruckmeldung des Rechners und/ 
Oder eine mechanische Zusatzruckmeldung der Zusatzauf nahmege- 
30 ometrie erfolgen. 

Die Grundauf nahmegeometrie weist eine Grundabbildungshaupt- 
achse auf, die Zusatzaufnahmegeometrie eine Zusatzabbildungs- 
hauptachse. Die Abbildungshauptachsen schneiden sich in der 
35 Regel unter Bildung eines Schnittwinkels in einem gemeinsamen 
Schnittpunkt . Der Schnittwinkel ist vorzugsweise derart zu 
bestimmen, dass die durch die Grund- und die Zusatzabbildung 
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vermittelte Gesamtinf ormation des Objekts moglichst groS ist. 
Dies ist insbesondere dann der Fall, wenn die Zusatzabbildung 
relativ zur Grundabbildung derart bestimmt wird, dass der 
Schnittwinkel 90° betragt . 

Falls der Schnittwinkel konstruktionsbedingt nur maximal so 
grofi wie ein Grenzwinkel sein kann, der kleiner als 90*^ ist, 
wird die Zusatzabbildung relativ zur Grundabbildung vorzugs- 
weise derart bestimmt, dass der Schnittwinkel gleich dem 
Grenzwinkel ist. 

Vorzugsweise wird vom Rechner auch eine von der Grunddarstel- 
lung des Volumendatensatzes verschiedene 2D-Zusatzdarstellung 
des Volumendatensatzes ermittelt und liber das Ausgabesystem 
als Bild fliichtig ausgegeben. Die Zusatzdarstellung wird da- 
bei gleichzeitig zur Grundabbildung und der Grunddarstellung, 
aber ortlich getrennt von diesen, gegebenenf alls auch ortlich 
getrennt von der Zusatzabbildung, ausgegeben. Dadurch ist fur 
den Bediener ein noch besseres Verstandnis des dargestellten 
Sachverhalts moglich. Ebenso wie bei der Grunddarstellung 
wird auch die Zusatzdarstellung vorzugsweise vom Rechner in 
Echtzeit ermittelt. Denn dadurch ist sie wieder interaktiv 
anderbar . 

Wenn die Zusatzdarstellung und die Zusatzabbildung perspekti- 
vische Projektionen sind und derart bestimmt werden, dass ih- 
re Projektionsparameter ubereinstimmen, ist ein mentaler Ab- 
gleich und Vergleich der Zusatzabbildung und der Zusatzdar- 
stellung fiir den Bediener wieder besonders einfach. 

Vorzugsweise wird vom Rechner ferner eine sowohl von der 
Grunddarstellung als auch von der Zusatzdarstellung des Volu- 
mendatensatzes unabhangige 2D-Erganzungsdarstellung des Volu- 
mendatensatzes ermittelt und iiber das Ausgabesystem als Bild 
fliichtig ausgegeben. Auch die Erganzungsdarstellung wird da- 
bei gleichzeitig mit der Grundabbildung, der Grunddarstellung 
und der Zusatzdarstellung, aber ortlich getrennt von diesen. 
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gegebenenfalls auch ortlich getrennt von der Zusatzabbildung, 
ausgegeben. Denn dann ist das Darstellungsverf ahren noch 
vielseitiger . Insbesondere kann beispielsweise die Ergan- 
zungsdarstellung variiert werden, ohne die Grund- und die Zu- 
satzdarstellung andern zu mtissen. 

Auch die Erganzungsdarstellung wird vorzugsweise - ebenso wie 
die Grunddarstellung und die Zusatzdarstellung - in Echtzeit 
ermittelt, Denn dann ist sie wieder interaktiv anderbar. 

Wenn die Abbildungen und die Darstellungen jeweils liber eine 
eigene Ausgabeeinrichtung, z. B. einen Monitor, des Ausgabe- 
systems ausgegeben werden, erfolgt die Ausgabe auf besonders 
iibersichtliche Weise. 

Wie oben stehend ausgefiihrt, konnen die Grund- und die Zu- 
satzdarstellung perspektivische Projektionen sein. Gleiches 
gilt selbstverstandlich auch fiir die Erganzurtgsdarstellung . 
Es ist aber auch moglich, dass die Darstellungen - einzeln 
Oder zusairanen - parallele Projektionen oder Schnitte sind. 
Auch die Grund- und die Zusatzabbildung konnen perspektivi- 
sche Projektionen sein. 

Wenn die Grundabbildung, gegebenenfalls auch die Zusatzabbil- 
dung, durch Rontgenstrahlung oder durch Ultraschall ermittelt 
werden, gestaltet sich die Ermittlung der Abbildungen beson- 
ders einfach. 

Weitere Vorteile und Einzelheiten ergeben sich aus der nach- 
folgenden Beschreibung eines Ausf uhrungsbeispiels in Verbin- 
dung mit den Zeichnungen. Dabei zeigen in Prinzipdarstellung 

FIG 1 schematisch eine bildgebende Modalitat, 



FIG 2 



einen Ausschnitt von FIG 1 und 
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FIG 3 und 4 Kombinationen von 2D-Darstellungen eines Volu- 
mendatensatzes eines Objekts mit mindestens 
einer 2D-Abbildung des Objekts. 

Gemafi FIG 1 ist eine bildgebende Modalitat 1 z. B. als Ront- 
genanlage 1 ausgebildet. Die Rontgenanlage 1 ist mit einem 
Steuerrechner 2 verbunden. 

Die Rontgenanlage 1 ist gem^S FIG 2 als C-Bogen-Anlage ausge- 
bildet. Sie weist also ein Ron tgensys tern auf , das aus einer 
Rontgenquelle 3 und einem Rontgendetektor 4 besteht, die auf 
einer gemeinsamen Kreisbahn 5 um eine Schwenkachse 6 ver~- 
schwenkbar sind. Jede Stelle auf der Kreisbahn 5 definiert 
eine Auf nahmegeometrie . Die Auf nahmegeometrie weist insbeson- 
dere eine Abbildungshauptachse 7 auf, die durch die Rontgen- 
quelle 3 und das Zentrum des Rontgendetektors 4 bestimmt ist, 
Sie schneidet die Schwenkachse 6 in einem Schnittpunkt 8. 

Ein mit dieser Aufnahmegeometrie erfasstes Durchleuchtungs- 
bild eines Objekts 9 (in der Regel eines Menschen 9) ist so- 
mit mittels des Rontgendetektors 4 erfassbar und in Echtzeit 
an den Steuerrechner 2 libermittelbar . Von diesem wird dann 
die korrespondierende Abbildung 23 des Objekts 9 ermittelt 
und in Echtzeit liber ein Ausgabesystem 10 als Bild fltichtig 
ausgegeben. Im vorliegenden Fall eines Durchleuchtungsbildes 
ist die Abbildung 23 eine perspektivische Projektion 23. 

GemalS FIG 2 ist zusatzlich zu dem von der Rontgenquelle 3 und 
dem Rontgendetektor 4 gebildeten Rontgensystem ein weiteres 
Rontgensystem vorhanden, das ebenfalls eine Rontgenquelle 3' 
und einen Rontgendetektor 4' aufweist. Die Rontgensysteme 
sind dabei im wesentlichen gleich ausgebildet. Sie sind auch 
in gleicher Weise betreibbar. Gleiche Komponenten sind daher 
mit den gleichen Bezugszeichen versehen, die aber zur Unter- 
scheidung vom erstgenannten Rontgensystem mit einem Apostroph 
versehen sind. 
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Soweit nachfolgend zwischen dem vom Rontgendetektor 4 erf ass- 
ten Durchleuchtungsbild (Projektion 23) und dem vom Rontgen- 
detektor 4' erf ass ten Durchleuchtungsbild (Projektion 23') 
unterschieden wird, ist ersteres als Grundabbildung 23 bzw. 
5 Grundprojektion 23 bezeichnet, letzteres als Zusatzabbildung 
23' bzw. Zusatzprojektion 23'. 

GemaS FIG 3 wird vom Steuerrechner 2 die Zusatzabbildung 23' 
ebenfalls liber das Ausgabesystem 10 ausgegeben. Das Ausgabe- 

10 system 10 weist hierftir eine Vielzahl von Ausgabeeinrichtun- 
gen 11, z. B. von Monitoren 11, auf. Die beiden Projektionen 

1^, 23, 23' werden dabei iiber je eine eigene Ausgabeeinrichtung 
11 ausgegeben. Die Ausgabe der Abbildungen 23, 23' erfolgt 
also zwar gleichzeitig, aber getrennt voneinander. 

15 

Die Grund- und die Zusatzabbildung 23, 23' sind durch die 
Auf nahmegeometrien bestimmt, wobei gemaS FIG 2 die Aufnahme- 
geometrien voneinander verschieden sind. Insbesondere schnei- 
den sich die Abbildungshauptachsen 7, 7' unter Bildung eines 
20 Schnittwinkels a in dem Schnittpunkt 8. Somit ist auch die 
Zusatzabbildung 23' von der Grundabbildung 23 verschieden. 

Die Zusatzabbildung 23' wird relativ zur Grundabbildung 23 
derart bestimmt, dass der Schnittwinkel a einen Minimalwert 
nicht unterschreitet . Vorzugsweise sollte der Schnittwinkel 
a 90^ betragen. Wenn dies nicht moglich sein sollte, well 
ein Grenzwinkel, unter dem die Abbildungshauptachsen 7, 7' 
sich maximal schneiden konnen, kleiner als 90^ ist, wird die 
Zusatzabbildung 23' relativ zur Grundabbildung 23 vorzugswei- 
30 se derart bestimmt, dass der Schnittwinkel a gleich dem 

Grenzwinkel ist. In der Praxis hat sich herausgestellt , dass 
gute Ergebnisse bereits erzielbar waren, wenn der Schnittwin- 
kel a 45^ betragen hat. 



35 



Prinzipiell sind die Grundauf nahmegeometrie und die Zusatz- 
aufnahmegeometrie der Rontgensysteme unabhangig voneinander 
einstellbar. Sie konnen dabei beispielsweise, wie in FIG 1 
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angedeutet, manuell durch einen Bediener 12 oder vom Steuer- 
rechner 2 verstellt werden. In jedem Fall aber sind die Auf- 
nahmegeometrien jederzeit anderbar. 

Wenn das Andern der Auf nahmegeometrien manuell durch den Be- 
diener 12 erfolgt, ist das Anfahren vorbestimmter Aufnahme- 
stellungen kritisch. Daher werden beispielsweise mittels Sen- 
soren von einer Steuereinrichtung 13 kontinuierlich die mo- 
mentanen Stellungen der Rontgensysteme erfasst und an den 
Steuerrechner 2 gemeldet . Wenn z. B. die Grundaufnahmegeomet- 
rie eine vorbestimmte Aufnahmestellung erreicht, gibt der 
Rechner 2 iiber einen Bildschirm oder eine schematisch ange- 
deutete Signallampe 14 eine optische Riickmeldung an den Be- 
diener 12 aus. 

Alternativ oder zusatzlich kann bei Erreichen der gewiinschten 
Aufnahmestellung auch eine akustische Riickmeldung liber einen 
kleinen Lautsprecher 15 erfolgen. Es ist auch moglich, dass 
die Rontgenanlage 1 selbst schematisch angedeutete mechani- 
sche Ruckkopplungselemente 16 aufweist, so dass die Aufnahme- 
geometrie selbst ahnlich einem Schalter mit mehreren Dreh- 
stellungen eine mechanische Riickmeldung an den Bediener 12 
ausgibt . 

Die obigen Ausfiihrungen beziiglich des definierten Anfahrens 
von Aufnahmestellungen gelten selbstverstandlich gleicherma- 
iSen fiir das Grundrontgensystem und das ZusatzrSntgensystem. 

Das Aufnehmen der Durchleuchtungsbilder des Objekts 9 (Pro- 
jektionen 23, 23') und Darstellen der Projektionen 23, 23' 
iiber die Ausgabeeinrichtungen 11 wird vom Steuerrechner 2 un- 
ter Abarbeitung eines Computerprogramms 17 durchgefiihrt , mit 
dem der Steuerrechner 2 programmiert ist. 

Dem Steuerrechner 2 ist auch ein Speicher 18 zugeordnet. Im 
Speicher 18 ist unter anderem ein Volumendatensatz 19 des Ob- 
jekts 9 hinterlegt. Der Volumendatensatz 19 kann dabei anhand 
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von Daten aller bildgebenden 3D-Modali taten ermittelt worden 
sein. Der Volumendatensatz 19 kann also beispielsweise mit- 
tels Computertomographie, Magnetresonanztomographie, 3D-An- 
giographie, 3D-Rontgenverf ahren, 3D-Ultraschall und anderer 
bildgebender 3D-Verfahren wie beispielsweise Positronen-Emis 
sions-Tomographie (PET) oder Single Photon Emission Computer 
Tomography (SPECT) ermittelt worden sein. 

Gesteuert durch das Computerprogramm 17, ermittelt der Steu- 
errechner 2 daher auch mindestens eine Darstellung 20 bis 22 
des Voliimendatensatzes 19 und stellt sie liber eine der Ausga 
beeinrichtungen 11 des Ausgabesys terns 10 dar. Der Steuerrech 
ner 2 gibt dabei jede der Darstellungen 20 bis 22 liber je ei 
ne eigene Ausgabeeinrichtung 11 des Ausgabesys terns 10 als 
Bild fluchtig aus . Auch die Darstellungen 20 bis 22 werden 
somit vom Steuerrechner 2 zwar gleichzeitig, aber ortlich ge 
trennt voneinander (und auch ortlich getrennt von den Abbil- 
dungen 23, 23') ausgegeben. 

GemaS FIG 3 gibt der Steuerrechner 2 drei Darstellungen 20 
bis 22 des Volumendatensatzes 19 uber je eine der Ausgabeein 
richtung 11 aus. Die Darstellungen 20 bis 22 werden nachfol- 
gend zur Unterscheidung voneinander als Grunddarstellung 20, 
Zusatzdarstellung 21 und Erganzungsdarstellung 22 bezeichnet 

Die Darstellungen 20 bis 22 werden vom Steuerrechner 2 in 
Echtzeit ermittelt. GemaS FIG 3 sind insbesondere die Grund- 
darstellung 20 und die Zusatzdarstellung 21 perspektivische 
Projektionen 20, 21. Die Projektionsparameter der Grunddar- 
stellung 20 stimmen dabei mit den Projektionsparametern der 
Grundabbildung 23 uberein. Ebenso stimmen die Projektionspa- 
rameter der Zusatzdarstellung 21 mit den Projektionsparame- 
tern der Zusatzabbildung 23' uberein. Insbesondere ist somit 
auch die Zusatzdarstellung 21 von der Grunddarstellung 20 
verschieden . 
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Die Erganzungsdarstellung 22 ist von der Grunddarstellung 20 
und der Zusatzdarstellung 21 unabhangig. Sie ist gemaS FIG 3 
insbesondere interaktiv anderbar. Beispielsweise kann der Vo- 
lumendatensatz 19 tiber die Erganzungsdarstellung 22 unter 
sich andernden Blickwinkeln dargestellt werden. 

GemaS FIG 3 ist die Grunddarstellung 20 an die Grundabbildung 
23 gekoppelt, die Zusatzdarstellung 21 an die Zusatzabbildung 
23'. Insbesondere sind somit die Grunddarstellung 20 und die 
Zusatzdarstellung 21 zwangsweise perspektivische Projektionen 
20, 21. Im vorliegenden Fall steht sogar eine gegenseitige 
Kopplung zwischen Grundabbildung 23 und Zusatzabbildung 23', 
so dass indirekt auch die Grunddarstellung 2 0 und die Zusatz- 
darstellung 21 miteinander gekoppelt sind. Es ist somit mog- 
lich, bei einer Anderung von Grund- oder Zusatzabbildung 23, 
23' die korrespondierende Darstellung 20, 21 unmittelbar und 
automatisch mitzufiihren. Somit sind indirekt auch die Grund- 
und die Zusatzdarstellung 20, 21 interaktiv anderbar. 

Dariiber hinaus ist es prinzipiell aber auch moglich, die 
Grunddarstellung 20 von der Grundabbildung 23 zu entkoppeln 
und ebenso auch die Zusatzdarstellung 21 von der Zusatzabbil- 
dung 23' zu entkoppeln. In diesem Fall ist selbstverstandlich 
auch eine direkte interaktive Anderung der Grund- und der Zu- 
satzdarstellung 20, 21 moglich. Dartiber hinaus miissen in die- 
sem Fall die Grund- und die Zusatzdarstellung 20, 21 nicht 
notwendigerweise perspektivische Projektionen sein. Vielmehr 
konnen sie in diesem Fall auch parallele Projektionen oder 
Schnitte sein. 

Ein Beispiel einer derartigen Entkopplung zeigt FIG 4. GemaS 
FIG 4 werden uber das Ausgabesystem 10 drei Darstellungen 20 
bis 22 (des Volumendatensatzes 19) und eine Projektion 23 
(des Objekts) gleichzeitig, aber ortlich getrennt voneinander 
ausgegeben. Die drei Darstellungen 2 0 bis 22 sind gemaS FIG 4 
z. B. drei zueinander senkrechte Schnitte 20 bis 22. Die Pro- 



200210466 



14 

jektion 23 kann im Einzelfall parallel zu einem der Schnitte 
verlaufen. Dies ist im Allgemeinen aber nicht der Fall. 

Die Schnitte 20 bis 22 und die Projektion 23 werden gemafi FIG 
4 iiber eine einzige, gemeinsame Ausgabeeinrichtung 11 des 
Ausgabesys terns 10 ausgegeben. Sie konnten aber auch uber je- 
wel Is eine eigene Ausgabeeinrichtung 11 ausgegeben werden. In 
jedem Fall aber werden sie iitimer gleichzeitig, aber ortlich 
getrennt voneinander ausgegeben. 

Gemafi FIG 4 ist es moglich, dass vom Steuerrechner 2 mindes- 
tens eine in Bezug auf den Volumendatensatz 19 gegebene orts- 
bezogene Information an einer korrespondierenden Stelle der 
Projektion 23 berucksichtigt wird. 

Beispielsweise weisen die drei Schnitte 20 bis 22 einen ge- 
meinsamen Punkt 24 auf. Dieser Punkt 24 entspricht einem 3D~ 
Cursor 24. Dieser 3D-Cursor 24 kann beispielsweise in die 
Projektion 23 als Markierung 25 mit eingeblendet werden. Auch 
ist es beispielsweise moglich, einen geplanten 3D-Weg fur ein 
Werkzeug, der anhand des Volumendatensatzes 19 ermittelt wur- 
de, in die Projektion 23 einzublenden. GemaS FIG 3 geschieht 
dies beispielsweise fur beide Abbildungen 23, 23' uber eigene 
Ausgabeeinrichtungen 11 des Ausgabesys terns 10. Dort werden 
also zusatzlich zu den Abbildungen 23, 23' noch zwei weitere 
Abbildungen 27, 27' ausgegeben. 

Auch ist es moglich, einen anderweitig in den Schnitten 20 
bis 22 markierten oder selektierten Bereich des Volumendaten- 
satzes 19 in ahnlicher Weise automatisch in der Projektion 23 
zu markieren oder zu selektieren. Es ist sogar moglich, einen 
Cursor 26 der Projektion 23 mit dem gemeinsamen Punkt 24 der 
Schnitte 20 bis 22 zu verkoppeln. 

Das Verfahren kann insbesondere auch dazu verwendet werden, 
die Genauigkeit der Registrierung zu iiberprufen. Beispiels- 
weise konnen markante Stellen des Volumendatensatzes 19 in 
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den Schnitten 20 bis 22 markiert warden. Durch gleichzeitiges 
automat isches Markieren der korrespondierenden Stellen 25 
durch den Steuerrechner 2 kann dann auf einfache Weise die 
Korrektheit der Regis trierung, das heifit der Abbildung des 
Volumendatensatzes 19 in die Projektion 23, uberpruft werden. 

Auch umgekehrt ist es moglich, dass vom Steuerrechner 2 min- 
destens eine im Bezug auf das Objekt 9 gegebene ortsbezogene 
Information an korrespondierenden Stellen der Schnitte 20 bis 
22 berucksichtigt wird. Dies ist insbesondere dann moglich, 
wenn nicht nur die Grund-, sondern auch die Zusatzabbildung 
23, 23' genutzt werden kann. Denn dann ist anhand der zwei 
Projektionen 23, 23' ein Ort im Volumendatensatz 19 eindeutig 
bestimmbar, Somit kann auch eine Riickabbildung eindeutig aus- 
gefiihrt werden. Es ist also wiederum z. B. eine Kopplung des 
Cursors 2 6 mit dem gemeinsamen Punkt 24 moglich und auch ein 
Markieren und Selektieren von Bereichen in der Projektion 23 
(bzw. den Projektionen 23, 23'), wobei dann der Steuerrechner 
2 automatisch die korrespondierenden Markierungen und Selek- 
tierungen in den Schnitten 20 bis 22 vornimmt. 

Das vorliegende Verfahren zum Einblenden von aus der Projek- 
tion 23 (bzw. den Projektionen 23, 23') gewonnenen Informati- 
onen in die Darstellungen 20 bis 22 kann insbesondere dazu 
benutzt werden, ein chirurgisches Instrument, z. B. einen Ka- 
theter, und hier insbesondere die Katheterspitze, in der Pro- 
jektion 23 (bzw. in den Projektionen 23, 23') zu markieren 
und diese Spitze dann in die Schnitte 20 bis 22 einzublenden. 
Denn in den Projektionen 23, 23' wird der Katheter meist sehr 
hoch auflosend dargestellt, wahrend die anatomische Informa- 
tion des umgebenden Gewebes oftmals nur unzureichend abgebil- 
det werden kann. Durch das Einblenden der Katheterspitze in 
die Schnitte 20 bis 22 (bzw. allgemeiner die Darstellungen 
des Vol\imendatensatzes 19) kann daher der Katheter aufgrund 
der vorliegenden Erfindung erheblich praziser gefiihrt werden. 
Das Auffinden der Katheterspitze in der Projektion 23 (bzw. 
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in den Projektionen 23, 23') dann dabei ggf . automatisch er- 
f olgen . 

GemaS dem oben stehend beschriebenen Ausf iihrungsbeispiel wer- 
den durch Rontgenstrahlung Abbildungen 23, 23' ermittelt, die 
Projektionen 23, 23' sind. Dies stellt auch den haufigsten 
Anwendungsfall dar. Die Abbildungen 23, 23' konnen aber auch 
auf andere Art, insbesondere durch Ultraschall, SPECT und PET 
ermittelt werden. In diesen Fallen miissen die Abbildungen 23, 
23' nicht notwendigerweise Projektionen 23, 23' sein. 

Die vorliegende Erfindung wurde ferner in Verbindung mit ei- 
ner medizinischen Anwendung beschrieben. Sie ist aber nicht 
auf medizinische Anwendungen beschrankt, sondern vielmehr 
allgemein anwendbar. 
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Patentanspriiche 

1. Rechnergestutztes Darstellungsverf ahren fiir ein 3D-0bjekt 
(9), mit folgenden Merkmalen: 
5 - von einem Rechner (2) wird eine 2D-Grundabbildung (23) des 
Objekts (9) ermittelt und iiber ein Ausgabesystem (10) als 
Bild fliichtig ausgegeben, 

- vom Rechner (2) wird eine 2D-Grunddarstellung (20) eines 
3D-Volumendatensatzes (19) des Objekts (9) ermittelt und 

10 liber das Ausgabesystem (10) als Bild fliichtig ausgegeben, 

- die Grundabbildung (23) und die Grunddarstellung (20) wer- 
den vom Rechner (2) gleichzeitig, aber ortlich getrennt 
voneinander ausgegeben. 

15 2. Darstellungsverf ahren nach Anspruch 1, 

dadurch gekennzeichnet, 

dass die Grunddarstellung (20) vom Rechner (2) in Echtzeit 

ermittelt wird. 

20 3. Darstellungsverf ahren nach Anspruch 1 oder 2, 
dadurch gekennzeichnet, 
dass die Grunddarstellung (20) interaktiv anderbar ist. 

4. Darstellungsverf ahren nach Anspruch 1, 2 oder 3, 
dadurch gekennzeichnet, 

dass die Grundabbildung (23) durch eine Grundaufnahmegeomet- 
rie bestimmt ist und dass die Grundauf nahmegeometrie jeder- 
zeit anderbar ist. 

30 5. Darstellungsverf ahren nach Anspruch 4, 

dadurch gekennzeichnet, 
dass die Grundauf nahmegeometrie von einem Bediener (12) in 
eine Grundauf nahmestellung verfahren wird und dass bei Errei- 
chen der Grundauf nahmestellung der Rechner (2) eine akusti- 

3 5 sche Oder optische Grundriickmeldung und/ oder die Grundauf nah- 
megeometrie eine mechanische Grundriickmeldung an den Bediener 
(12) ausgibt. 
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6. Darstellungsverf ahren nach einem der obigen Anspruche, 
dadurch gekennzeichnet, 

dass die Grunddarstellung (20) und die Grundabbildung (23) 
perspektivische Projektionen (20, 23) sind und derart be- 
5 stiirant warden, dass ihre Projektionsparameter iiberstirnmen. 

7. Darstellungsverf ahren nach einem der obigen Anspriiche, 
dadurch gekennzeichnet, 

dass mindestens eine in Bezug auf den Volumendatensatz (19) 
10 gegebene Information (24) vom Rechner (2) an einer korrespon- 
dierenden Stelle (25) der Grundabbildung (23) beriicksichtigt 
W wird. 

8. Darstellungsverf ahren nach einem der obigen Anspruche, 
15 dadurch gekennzeichnet, 

dass mindestens eine in Bezug auf das Objekt (9) gegebene 
ortsbezogene Information (26) vom Rechner (2) an einer kor- 
respondierenden Stelle (24) der Grunddarstellung (20) beriick- 
sichtigt wird. 

20 

9. Darstellungsverf ahren nach einem der obigen Anspruche, 
dadurch gekennzeichnet, 

- dass vom Rechner (2) eine von der Grundabbildung (23) des 
Objekts (9) verschiedene 2D-Zusatzabbildung (23') des Ob- 

'ilrs jekts (9) ermittelt wird, 

- dass die Zusatzabbildung (23') vom Rechner (2) uber das 
Ausgabesystem (10) als Bild fliichtig ausgegeben wird und 

- dass die Zusatzabbildung (23') des Objekts (9) gleichzeitig 
zur Grunddarstellung (20) und zur Grundabbildung (23), aber 

30 ortlich getrennt von diesen ausgegeben wird. 

10. Darstellungsverf ahren nach Anspruch 9, 
dadurch gekennzeichnet, 

dass die Zusatzabbildung (23') durch eine Zusatzauf nahmegeo- 
35 metrie bestimmt ist und dass die Zusatzauf nahmegeometrie je- 
derzeit anderbar ist. 
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11. Darstellungsverf ahren nach Anspruch 10, 
dadurch gekennzeichnet, 

dass die Zusatzauf nahmegeometrie von einem Bediener (12) ma- 
nuell in eine Zusatzauf nahmestellung verfahren wird und dass 
5 bei Erreichen der Zusatzauf nahmestellung der Rechner (2) eine 
akustische Oder optische Zusatzriickmeldung und/oder die Zu- 
satzauf nahmegeometrie eine mechanische Zusatzriickmeldung an 
den Bediener (12) ausgibt. 

10 12. Darstellungsverf ahren nach Anspruch 4 oder 5 und Anspruch 



- dass die Grundauf nahmegeometrie eine Grundabbildungshaupt- 
achse (7) aufweist, 

15 - dass die Zusatzaufnahmegeometrie eine Zusatzabbildungs- 
hauptachse (7') aufweist, 

- dass die Abbildungshauptachsen (7, 1') sich unter Bildung 
eines Schnittwinkels (a) in einem gemeinsamen Schnittpunkt 
(8) schneiden und 

20 - dass die Zusatzabbildung (23') relativ zur Grundabbildung 
(23) derart bestimmt wird, dass der Schnittwinkel 90° be- 
tragt . 

13 . Darstellungsverf ahren nach Anspruch 4 oder 5 und Anspruch 
flks 10 Oder 11, 

dadurch gekennzeichnet, 

- dass die Grundauf nahmegeometrie eine Grundabbildungshaupt- 
achse (7) aufweist, 

- dass die Zusatzaufnahmegeometrie eine Zusatzabbildungs- 
30 hauptachse (7') aufweist, 

- dass die Abbildungshauptachsen (7, 7') sich unter Bildung 
eines Schnittwinkels (a) in einem gemeinsamen Schnittpunkt 
( 8 ) schneiden, 

- dass der Schnittwinkel (a) konstruktionsbedingt maximal so 
35 grofi wie ein Grenzwinkel ist, der kleiner als 90° ist, und 




10 Oder 11, 
dadurch 



gekennzeichnet 
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- dass die Zusatzabbildung (23') relativ zur Grundabbildung 
(23) derart bestimmt wird, dass der Schnittwinkel (a) 
gleich dem Grenzwinkel ist. 

5 14. Dars tel lungs verfahr en nach einem der obigen Anspriiche, 
dadurch gekennzeichnet, 

- dass vom Rechner (2) eine von der Grunddarstellung (20) des 
Volumendatensatzes (19) verschiedene zweidimensionale Zu- 
satzdarstellung (21) des Volumendatensatzes (19) ermittelt 

10 wird, 

^, - dass die Zusatzdarstellung (21) vom Rechner (2) iiber das 

^^(^ Ausgabesystem (10) als Bild fliichtig ausgegeben wird und 

- dass die Zusatzdarstellung (21) gleichzeitig zur Grundab- 
bildung (23) und zur Grunddarstellung (20) , aber ortlich 

15 getrennt von diesen, gegebenenf alls auch ortlich getrennt 
von der Zusatzabbildung (23'), ausgegeben wird. 

15. Darstellungsverf ahren nach Anspruch 14, 
dadurch gekennzeichnet, 

20 dass die Zusatzdarstellung (21) vom Rechner (2) in Echtzeit 
ermittelt wird. 

16. Darstellungsverf ahren nach Anspruch 14 oder 15, 
> dadurch gekennzeichnet, 

^^fe dass die Zusatzdarstellung (21) interaktiv anderbar ist. 

17. Darstellungsverfahren nach einem der Anspriiche 9 bis 13 
und einem der Anspriiche 14 bis 16, 

dadurch gekennzeichnet, 
30 dass die Zusatzdarstellung (21) und die Zusatzabbildung (23') 
perspektivische Projektionen (21, 23') sind und derart be- 
stimmt werden, dass ihre Projektionsparameter iibereinstimmen. 

18. Darstellungsverfahren nach einem der Anspriiche 14 bis 17, 
35 dadurch gekennzeichnet, 

- dass vom Rechner (2) eine sowohl von der Grunddarstellung 
(20) als auch von der Zusatzdarstellung (21) unabhangige 
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2D-Ergan2ungsdarstellung (22) des Volumendatensatzes (19) 
ermittelt wird, 

- dass die Erganzungsdarstellung (22) vom Rechner (2) iiber 
das Ausgabesystem (10) als Bild fliichtig ausgegeben wird 

5 und 

- dass die Erganzungsdarstellung (22) gleichzeitig mit der 
Grundabbildung (23), der Grunddarstellung (20) und der Zu- 
satzdarstellung (21) , aber ortlich getrennt von diesen, ge- 
gebenenfalls auch ortlich getrennt von der Zusatzabbildung 

10 (23' ) , ausgegeben wird. 

19. Darstellungsverf ahren nach Anspruch 18, 
dadurch gekennzeichnet, 
dass die Erganzungsdarstellung (22) in Echtzeit ermittelt 
15 wird. 



20 



20. Darstellungsverf ahren nach Anspruch 18 oder 19, 
dadurch gekennzeichnet, 

dass die Erganzungsdarstellung (22) interaktiv anderbar ist. 

21. Darstellungsverf ahren nach einem der obigen Anspriiche, 
dadurch gekennzeichnet, 

dass die Abbildungen (23, 23') und die Darstellungen (20 bis 
22) jeweils iiber eine eigene Ausgabeeinrichtung (11), z. B. 
einen Monitor (11) , des Ausgabesys terns (10) ausgegeben wer- 
den. 



22. Darstellungsverf ahren nach einem der obigen Anspriiche, 
dadurch gekennzeichnet, 

30 dass die Darstellungen (20 bis 22) des Volumendatensatzes 
(19) Schnitte oder perspektivische Projektionen sind. 

23. Darstellungsverf ahren nach einem der obigen Anspriiche, 
dadurch gekennzeichnet, 

35 dass die Abbildungen (23, 23') des Objekts (9) perspektivi- 
sche Projektionen (23, 23') sind. 
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24. Darstellungsverf ahren nach einem der obigen Anspriiche, 
dadurch gekennzeichnet, 

dass die Grundabbildung (23), gegebenenf alls auch die Zusatz 
abbildung (23'), durch Rontgenstrahlung oder durch Ultra- 
schall ermittelt wird bzw. werden. 

25. Computerprogramm zur Durchfiihrung eines Darstellungsver- 
fahrens nach einem der obigen Anspriiche. 

26. Mit einem Computerprogramm nach Anspruch 24 programmier- 
ter Rechner. 

27. Rechner nach Anspruch 26, 

dadurch gekennzeichnet, 

dass er als Steuerrechner fur eine bildgebende Modalitat (1) 

insbesondere eine Rontgenanlage (1), ausgebildet ist. 

28. Bildgebende Modalitat, insbesondere Rontgenanlage, mit 
einem Steuerrechner (2) nach Anspruch 27. 



200210466 



23 

Zusammenf assung 

Rechnergestiitztes Darstellungsverf ahren fur ein 3D-0bjekt 

Im Rahmen eines rechnergestiitzten Darstellungsverf ahrens fur 
ein 3D-0bjekt (9) werden von einem Rechner (2) eine 2D-Grund- 
abbildung (23) des Objekts (9) und eine 2D-Grunddarstellung 
(20) eines 3D-Volumendatensatzes (19) des Objekts (9) ermit- 
telt und liber ein Ausgabesystem (10) als Bilder fliichtig aus- 
gegeben. Die Grundabbildung (23) und die Grunddarstellung 
(20) werden vom Rechner (2) dabei gleichzeitig, aber ortlich 
getrennt voneinander ausgegeben. 
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